（来源：上观新闻）
“就像冰河时代🇵🇷🦞来临，⛈所有巨大🇻🇺🎉的动物都👖☀要把自己变形☑🐨才能活下去🥟🤞。例如：🇭🇲 “的” →📘 单独1个tok🌭🏕en “中国♨🔃” → Ⓜ1个token🇦🇱（高频组合） 🍩“人工智能” 👓→ 2🇾🇪个to🧑ken（“💏人工”+“㊗🤷♂️智能”） 🇳🇦👡单个生僻字和长🈯🥇词被拆解👨👧👧成多个词元 对于低频字或❎🈯专业术🦚语，BP🌡🤧E算法缺🐋🐙乏足够的合🍉🎠并动力，只能📣🐑拆分为基础🇲🇾♒字符甚至UTF🙏-8字节： “😤🕶薹”（生🇲🇶僻字）→ 可🐧能被拆为2-3个🥗🇴🇲toke🤜n “意👩🚒🖕大利薄底萨拉斯🕘🕕米肠披萨” → 🎞可能被拆为👩✈️10+个🌉🤷♀️token 这种🇲🇦🇹🇻差异直接🏃体现在计费上🛎。
目前来🐘😋看，这是一个理🌮性的策略🙃📊。根据外🇰🇿媒报道，Ope🐈nAI首席营收♟️🧗♀️官德尼丝🐰🕟·德雷塞🌂尔（Denis🍑e Dres🏐🛣ser）给员👎🦠工发了一份⛰🇰🇭四页备忘录，🚄里面提到👨👩👧🌳Anthrop🍽🌮ic竞🇩🇪🔟争、算力不足、🇲🇽🌟产品策略🥉🔬。近两年随🍝👨👩👧着AI大模型👣训练和推🛴理需求的飙升，🐳🎛AI服务器使🎨7️⃣用的HB🛒M高带🚸宽内存，需求🚑🥙也随之👩👩👧增加🔰🌆。而Being7️⃣🛍Beyo🔜nd作为业内👩👧👦首个提🧟♀️出人类视⏯频预训练的玩家，💻在过去不长🏴的时间内，即对🦇外展现🗒🍿了人类视频预训🎬☹练、模型部署和🏳️🌈🦗数据采8️⃣集闭环全栈💳👁️🗨️技术体系🧡。
